PENGENALAN GESTUR GERAKAN JARI UNTUK MENGONTROL VOLUME DI KOMPUTER MENGGUNAKAN LIBRARY OPENCV DAN MEDIAPIPE

Gesture recognition merupakan salah satu bagian yang ada dalam kecerdasan buatan dibidang computer vision. Dengan gesture tersebut komputer mampu memahami gerakan tertangkap pada kamera/webcam. Manfaat dari ini banyak sekali, satunya sedang peneliti lakukan mengenai handtracking jari tangan kanan manusia untuk mengantur kontrol volume atau laptop. Berdasarkan latar belakang tersebut, penelitian dimaksudkan menerapkan machine learning dikembangkan library OpenCV dan MediaPipe melakukan proses pelatihan testing sebagai isyarat mengontrol fungsi di Windows, adalah volume. Proses menggunakan Library karena multiprocessing dengan data real-time, sehingga identifikasi lebih cepat akurat. Ketika kamera/webcam menangkap frame pergerakan manusia, maka dilakukan augmentasi pemberian landmark keypoint localization setiap ruas jari. Pada ini, dikenali hanya ujung jempol telunjuk. Machine akan perhitungan jarak telunjukn mana digunakan menentukan perubahan besaran suara. Dari hasil pengujian sebanyak sembilan kali uji coba pose-pose berbeda diperoleh 88,89%. Satu tidak berhasil membaca jari, dikarenakan posisi telunjuk tertutup lainnya.